課程大綱：

Spark SQL 入門培訓(xùn)

1 Spark SQL 的基本原理和簡單操作

2 RDD 轉(zhuǎn)換為 DataFrame 的兩種方式

3 Spark SQL 與 Hive 整合

4 電影數(shù)據(jù)分析實戰(zhàn)

5 SpringBoot 的基本使用

6 離線日志分析實戰(zhàn)

7 DataFrames 和 DataSets 抽象數(shù)據(jù)結(jié)構(gòu)

8 Hive 概述和搭建

9 Spark SQL 操作多數(shù)據(jù)源

10 ECharts 數(shù)據(jù)可視化工具

11 數(shù)據(jù)可視化實戰(zhàn)

12 NLP 數(shù)據(jù)挖掘?qū)崙?zhàn)

1
Spark SQL入門

1.SparkSQL的基本原理

2.SparkSQL相對Hive等MapReduce作業(yè)的優(yōu)點

3.SparkSQL的簡單操作

4.DataFrames和DataSets兩種抽象數(shù)據(jù)結(jié)構(gòu)的使用

5.RDD轉(zhuǎn)換為DataFrame的兩種方式

2
Spark SQL 進階

1.Hive概述和搭建使用

2.SparkSQL與Hive的整合

3.SparkSQL操作多數(shù)據(jù)源

4.SparkSQL的簡單性能優(yōu)化

3
電影數(shù)據(jù)分析實戰(zhàn)

1.SparkSQL的應(yīng)用

2.Maven的簡單使用

3.IDEA工具的使用

4.MySQL的簡單使用

4
數(shù)據(jù)可視化實戰(zhàn)

1.ECharts的基本使用

2.SpringBoot的基本簡單使用

3.MySQL的基本操作

5
離線日志分析實戰(zhàn)

1.Flume的安裝使用

2.Spark核心操作

3.SparkSQL的使用 4.SQL語句

6
Spark SQL進行NLP數(shù)據(jù)挖掘?qū)崙?zhàn)

1.SparkSQL

2.NLP初步認識

3.jieba分詞器的使用

4.d3cloud繪制詞云